Can Test-Time Memory Evolution Outperform Test-Time Training for Scientific Discovery?
测试时记忆演化能否在科学发现中超越测试时训练?
🧭 测试时记忆演化替代权重更新
UC Santa Barbara · UC Berkeley
提出TTME:不更新权重,通过外部记忆持续沉淀经验指导后续发现,性能优于TTT且算力降八成以上
📌 工作参考价值(4 点)
- 在电商/广告的 Agentic 搜索、选品/文案迭代场景,可用“外部经验记忆”替代线上微调:把每次 query/候选/收益反馈写入可检索 memory,后续推理时检索相似案例,避免在线权重更新和灾难性遗忘。
- 具体实现可借鉴 TTME:把成功/失败经验蒸馏成结构化条目(如状态→动作→奖励),用 memory read/write 控制探索;适合低延迟、高吞吐的推荐对话 Agent。
- 计算成本收益可指导工程:类似 Qwen3-8B 规模下,外部记忆方法比在线训练省 80%+ FLOPs、约一半 runtime,适合边缘/实时决策。
- 需注意论文在数学发现任务上验证,迁移到业务前应先在自有任务上对比 TTT、无适应和 memory 方案的收益/复杂度。